Tuy nhiên sang năm sau, khi Nhật đảo chính Pháp, mở đường cho học giả Trần Trọng Kim thành lập chính phủ đã mời ông giữ chức Tổng đốc cai trị 4 miền cực Nam Trung Việt như là một Tiểu Khâm Sai. Chức vị của ông lúc bấy giờ là "Tổng đốc Lâm-Đồng-Bình-Ninh" (bốn tỉnh Lâm Viên, Đồng Nai Thượng, Bình Thuận, và Ninh Thuận), và vì lúc bấy giờ phương tiện giao thông và hệ thống liên lạc còn khó khăn cách trở nên ông được đại diện chính phủ toàn quyền giải quyết cấp thời công việc quốc gia.

Cuối tháng 8 năm 1945, Việt Minh cướp chính quyền tại Đà Lạt bằng một cuộc biểu tình rầm rộ, vây dinh Tổng đốc Lâm Viên, bắt ông giải về Huế. Sau đó ông được tha [3]. Trong khi đó, những quan lại nhà Nguyễn khác như Phạm Quỳnh và Ngô Đình Khôi, Nguyễn Bá Trác, Cung Đình Vận đều bị chết thảm.